iT邦幫忙

第 11 屆 iThome 鐵人賽

DAY 8
1

製作Scrapy爬蟲一共需要4步:
1.新建項目(scrapy startproject xxx):新建一個新的爬蟲項目
2.明確目標(編寫items.py):明確你想要抓取的目標
3.製作爬蟲(spiders/xxspider.py):製作爬蟲開始爬取網頁
4.存儲內容(pipelines.py):設計管道存儲爬取內容

Scrapy安裝

Scrapy在Python 2.7和Python 3.3或更高版本上運行
在Terminal輸入
    pip install Scrapy
    即可安裝

上一篇
[Day - 7]Scrapy的運作流程(Scrapy爬蟲 - 2)
下一篇
[Day - 9]機器學習實例2(K-近鄰算法實現手寫體數字識別-1)
系列文
Python + 機器學習/深度學習小筆記30
圖片
  直播研討會
圖片
{{ item.channelVendor }} {{ item.webinarstarted }} |
{{ formatDate(item.duration) }}
直播中

尚未有邦友留言

立即登入留言